Cross-View Correspondence Is a Measurement Intervention: Two-Sided Validation for Agent Evaluation and Credit Assignment
跨视图对应是测量干预:Agent评估与信用分配的双侧验证
🧭 Agent 评估 · 对应关系识别与信用分配 ★ 深度解读
Technical University of Munich
把跨视图对应视为测量干预,用双侧验证和全最优解集审计暴露隐藏 tie-breaking 对评估与信用分配的影响
📌 工作参考价值(4 点)
- 在离线评估或 RLHF/GRPO 中使用轨迹匹配、工具调用对齐时,不要只跑一次最优匹配;枚举所有 exact-optima,用 all-optima 证书(只保留所有最优解符号一致的坐标)而非单次 solver 结果,避免隐藏 tie-break 改变诊断或信用符号。
- 对跨视图变换(如 prompt 改写、工具 schema 映射、界面归一化)做双侧验证:null controls 防假敏感,positive controls 防假不变性;仅用 benign 重放校准不足,可能在 benign 数据上重建良好却抹掉真实响应差异。
- 信用分配/优势归一化中,相对标准化、peer normalization 可能因 hidden completion 顺序和样本内依赖导致符号反转;在重要决策上使用鲁棒共同方向或显式声明 completion policy,并记录匹配采样与归一化顺序。
- 检查公共严格指标(如 Tool-Exact-Match)是否因前缀匹配给多余步骤满分;对精确匹配类指标用 max length 归一化做保守修复,避免模型排序被指标缺陷反转。